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改进 随机 子 空间 LDA 结合 多 补丁 集成 学 习 的 鲁 棒 人 脸 识别 算法 
冯 代 高 ， 张 友 俊 


(上 海 海事 大 学 信息 工程 学 院 ， 上海 201306) 


摘 要 : 针对 化 妆 对 人 脸 识别 准确 率 的 负面 影响 ， 提 出 了 基于 补丁 集成 学 习 的 改进 鲁 棒 人 脸 识别 算法 。 首 先 ， 将 每 张 
人 脸 图 像 误 入 补丁 中 并 用 一 组 特征 描述 符 描 述 每 个 补丁 ， 即 本 地 梯度 Gabor 模式 (LGP)、Gabor 空间 定 序 定 比 测量 直方 
图 (HGSFRM) 和 密集 采样 局 部 多 值 模式 (DSLMP )。 然 后 ， 使 用 改进 的 随机 子 空间 线性 判别 分 析 (SRS-LDAI) 方 法 采样 补 
丁 ， 并 在 化 妆 之 前 和 化 妆 之 后 图 像 之 间 建 立 多 个 公共 子 空间 进行 集成 学 习 。 最 后 ， 利 用 协作 和 稀 足 表示 分 类 器 比较 这 
个 子 空间 中 的 特征 向 量 ， 同 时 通过 求 和 规则 联合 得 到 的 分 数 。 实 验 将 提出 的 算法 在 多 种 化 妆 数 据 集 上 进行 评估 分 析 ， 
结果 表明 提出 的 算法 相 比 于 其 他 专 为 妆 后 人 脸 识 别 设 计 的 算法 有 更 高 的 识别 精度 。 
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Robust face recognition algorithm based on multiple patch integration 
learning and improved random subspace LDA 


Feng Daigao, Zhang Youjun 
(College Of Information Engineering, Shanghai Maritime University, Shanghai 201306, China) 


Abstract: Aiming at the negative effects of makeup on face recognition, this paper presents an improved robust face recognition 
algorithm based on patch integration learning. In the pro-posed scheme, this paper tessellates each face image into patches and 
represents each patch with a set of feature descriptors, viz. , Local Gabor Pattern (LGP) , Histogram of GaborSpaceFixed Ratio 
Measures (HGSFRM) and Densely Sampled Local Multi-valued Pattern (DSLMP) . Then, uses an improved Random Subspace 
Linear Discriminant Analysis (SRS-LDA) method to perform ensemble learning by sampling patches and constructing multiple 
common subspaces between before-makeup and after-makeup facial images. Finally, uses Collaborative- based and Sparse- 
based Representation Classifiers to compare feature vectors in this subspace and the resulting scores combined by the sum-rule. 
The proposed face matching algorithm is evaluated on multiple makeup dataset. Results show that this algorithm has higher 
recognition accuracy than other algorithms designed for face recognition under makeup situation. 
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6 放 售 于 化 妆 可 能 大 幅 改 变 容颜 ， 从 而 给 人 脸 自动 识别 提出 了 挑战 
根据 文献 [3] 所 述 ， 由 于 化 妆 的 应 用 ， 商 业 和 学 术 的 人 脸 识别 广 
人 脸 自动 识别 已 在 诸如 个 人 认证 、 视 频 监控 和 人 机 交互 等 。 ”法 的 识别 精度 大 幅度 降低 。 人 脸 化 妆 的 应 用 可 以 影响 现 有 许多 


自 2 
领域 广泛 使 用 。 人 脸 自 动 识 别 通过 从 输入 的 人 脸 图 像 中 提取 有 的 依赖 对 比 度 和 纹理 信息 线索 建立 的 匹配 程序 。 同 时 ， 识 别 多 
识别 力 的 特征 并 将 这 个 特征 与 数据 集中 储存 的 模板 进行 比较 来 ”种 彩妆 结合 后 的 妆容 比 识 别 单独 使 用 某 一 种 化 妆 品 的 妆容 更 具 
进行 识别 止 。 随 着 鲁 棒 性 特征 表示 和 匹配 技术 的 发 展 ， 人 脸 识 ”挑战 。 解 决 混合 妆容 异 构 后 的 识别 问题 是 开发 鲁 棒 的 人 脸 识 别 
别 系统 的 准确 度 不 断 提高 外， 多 个 公开 基准 数据 库 上 错误 率 的 。 ”系统 的 关键 。 
显著 降低 。 到 目前 为 止 ， 解决 化 妆 引 入 的 变化 而 造成 的 挑战 的 科技 文 
前 ， 人 脸 识别 领域 仍然 存在 许多 挑战 ， 特 别 是 异 构 人 脸 。 ” 献 很 有 限 。 文 献 [各 利用 典型 相关 分 析 (canonical correlation 
识别 。 面 部 彩妆 是 一 种 非常 常见 的 面部 异 构 ， 妆 容 下 的 面部 识 analysis, CCA) 连 同 支持 向 量 机 (support vector machine,SVM) 分 
准确 度 极为 重要 。 图 1 为 彩妆 应 用 效应 的 实例 。 但 是 近期 的 ”类 器 一 起 改进 化 妆 之 前 和 化 妆 之 后 图 像 的 匹配 。 为 了 使 匹配 图 
研究 表明 ， 面 部 彩妆 后 人 脸 的 识别 准确 度 存 在 较 大 的 问题 。 像 之 间 的 差距 最 小 化 , 文献 [5] 研 究 了 从 化 妆 之 前 和 化 妆 之 后 图 
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像 中 提取 的 特征 之 间 的 映射 。 使 用 改进 的 CCA 和 偏 最 小 二 乘 
法 (partial least squares, PLS) 研 究 了 该 映射 。 尽 管 文中 证 明了 基 
于 映射 的 方法 的 有 效 性 ， 但 是 它 有 两 个 限制 。 首 先 ， 化 妆 之 前 
和 化 妆 之 后 人 脸 图 像 之 间 的 映射 可 能 是 复杂 的 、 空 间 变 化 的 和 
非 线性 的 ,因此 , 为 了 描述 化 妆 之 前 和 化 妆 之 后 样本 之 间 的 复杂 
关系 ， 研 究 单个 映射 远 远 不 够 ;其 二 ，CCA 和 PLS 方法 有 过 把 
合 训练 数据 的 倾向 ， 所 以 不 能 在 看 不 见 的 对 象 上 得 到 较 好 的 结 
果 。 文 献 [6,7] 提 出 了 基于 全 局 和 局 部 信息 综合 评分 的 人 脸 检 测 
方法 ， 该 类 方法 在 小 样本 范围 内 具有 较 高 的 识别 精度 ， 但 是 在 
扩大 的 样本 范围 内 识别 精度 有 待 研 究 。 

因此 ， 提 出 了 一 种 基于 补丁 子 空间 集成 的 鲁 棒 人 脸 识 别 算 
法 以 解决 在 化 妆 后 异 构 人 脸 图 像 识 别 的 问题 。 该 方法 通过 将 人 
脸 图 像 嵌 入 补丁 集中 ， 利 用 多 种 模式 提取 特征 向 量 ， 最 后 经 过 
分 类 比较 器 及 求 和 规则 获得 识别 结果 。 同 时 ， 通 六 
同 补丁 作为 每 个 基于 子 空间 的 分 类 器 的 输入 避免 了 过 度 拟 合 问 
题 。 该 算法 在 多 个 化 妆 数 据 集 上 进行 了 评估 ， 结 果 证 明了 算法 
的 有 效 性 。 


1 ”基于 多 补丁 集成 学 习 的 鲁 棒 人 脸 识 别 算法 


面 对 化 妆 时 的 人 脸 识 别提 出 的 多 补丁 集成 学 习 方 法 流程 如 
图 2 所 示 ， 对 于 一 张 人 脸 图 像 ， 首 先 将 这 张 图 像 镶 嵌 于 补丁 当 
中 ， 然 后 基于 本 地 梯度 Gabor 模式 (local gabor pattern,LGP)1、 
训练 阶段 


拼 贴 提取 


测试 阶段 
待 a 待 识别 妆 后 
拼 贴 提取 
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Gabor 空间 定 序 定 比 测量 直方 图 (histogram of gaborspacefixed 
ratio measures,HGSFRM) 和 密集 采样 局 部 多 值 模式 (Densely 
Sampled Local Multi-valued Pattern, DSLMP)B1， 将 多 个 特征 描 
述 符 应 用 于 每 个 补丁 中 。 这 些 描述 符 捕获 全 局 和 局 部 信息 。 接 
着 ， 使 用 基于 费 舍 尔 分 离 准 则 的 权 值 学 习 方 案 09 排 序 每 个 补丁 
的 重要 性 。 然 后 ， 基 于 与 补丁 相关 的 权 值 ， 使 用 半 随 机 采样 方 
法 选择 多 组 补丁 并 创建 子 空间 。 在 这 些 子 空间 中 使 用 基于 协作 
的 表示 分 类 器 (collaborative- based representation 
classifiers,CRCIII 和 基于 稀疏 的 表示 分 类 器 (sparse-based 
representation classifiers,SRC) 构 建 集成 分 类 器 对 子 空间 补丁 进 
行 评 分 034。 最 后 ， 使 用 求 和 规则 融合 由 分 类 器 生成 的 分 数 ， 该 
过 程 从 多 个 模式 取 分 数 的 加 权 平 均 。 经 过 以 上 步骤 ， 完 成 对 一 
个 人 像 图 片 的 识别 。 


眼影 打 底 需 


节 若 若 
类 是 融 


图 1 化 妆 改 变 人 脸 外 观 实例 
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图 2 多 补丁 和 
该 方法 为 人 脸 匹 配器 提出 了 一 种 集成 的 框架 ， 该 框架 对 化 
妆 的 应 用 具有 和 鲁 棒 性 。 该 方法 使 用 对 应 于 三 个 不 同 特 征 据 
的 多 个 子 空间 和 多 个 图 像 补丁 。 在 这 些 子 空间 中 联合 应 用 了 稀 
琉 和 协作 分 类 器 。 使 用 来 自 每 个 补丁 的 权 值 信 息 引 导 每 次 选择 ， 
不 使 用 纯 随 机 采样 。 
述 符 的 选择 在 人 脸 识别 算法 中 至 关 重 要 。 使 用 LGP、 
HGSFRM 和 DSLMP 描述 符 表示 每 张 人 脸 图 像 中 的 补丁 。 
数学 上 ， 将 Gabor 滤波 器 描述 为 四 


和 
兴 


Pi ， 
2,(z)= EL OF [er ee (1) 


其 中 :4 和 ， 分别 为 Gabor 滤波 器 的 方向 和 规模 。z 为 像素 位 置 ， 


成 学 习 流程 框架 


川 表示 规范 算 子 。 为 默认 值 是 2 的 恒 量 ,通过 ,=ke% 给 


出 ,， 其 中 =/s"，%=NU/8。 这 里 ,为 最 大 频率 ， 
s 为 频 域 中 核心 程序 之 间 的 间距 因子 。 利 用 Gabor 核 函 数 通过 
执行 输入 图 像 的 卷 积 获得 图 像 的 Gabor 响应 : 
G,,(z)=7(z)*9,,(z)。 复 杂 的 Gabor 响应 有 两 部 分 : 实数 部 分 
rs,(z) 和 虚数 部 分 i ,(z)。 因 此 ,Gabor 梯度 4,,(z) 和 相 计算 为 


A sz) =n,2) +i ,2) (2) 


Lv 


0,,(z)=arctan(i, ,(z)/r,,(z)) (3) 
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1.1 局 部 Gabor 梯度 模式 (LGP) 
为 了 编码 Gabor 梯度 响应 ,将 梯度 描述 符 定 义 为 19 


G(x.) -an| VB | (4) 


其 中 : M, 和 M, 分 别 为 沿 着 垂直 和 水 平方 向 计算 的 图 像 梯 度 
这 里 ， 这 两 个 方向 互相 正 交 。 具 有 参数 8 和 4 的 反正 切 函数 
(arctan) 阻 上 输入 增加 和 减少 太 快 。 令 y 表示 矩形 中 心 像 素 的 强 
度 值 ， 该 矩形 由 从 x 到 x ,采样 的 临近 点 围 成 ， 其 中 R 为 领域 
大 小 。 其 梯度 的 计算 为 

M, = Yioatir4, 8) — Vi (5) 
— Ymnoa (it2,8) (0) 
在 本 文 的 实 


Ah = yinoalir6.R) 
其 中 :用 jnod 表示 模 运 算 符 ，; 为 临近 像素 的 指数 。 
现 中 ， 本 文 使 用 R=6、B=8 和 4=1x10*。 
1.2 空间 Gabor 定 序 定 比 测量 (HGSFRM) 
为 了 编码 相位 响应 ， 本 文 使 用 定 序 测量 (ordinal measure， 
OM)JI。OM 比较 了 两 个 不 同 的 区 域 以 确定 哪个 区 域 具 有 较 大 
值 ( 如 均值 )。 本 文 使 用 多 叶 微 分 滤波 器 (multi-lobe differential 
filters, MLDF)II23 来 提取 定 序 特征 。 数 学 上 ， 将 MLDF 表示 为 


(7) 


ce eX 2 Ai) 
3 /270O 252 


oj 


其 中 : z 为 像素 位 置 ，j 和 6& 分 别 为 2D 高 斯 滤波 器 的 中 心 位 置 
和 规模 。 N, 为 正 叶 数 ， WN, 为 负 叶 数 。 C, 和 C, 为 常 系数 ， 用 
以 确保 MLDF 的 输出 ， 即 C,N, = C,N,。MLDF 为 差分 带 通 滤 
波 器 的 一 种 类 型 。 

1.3 密集 采样 局 部 多 值 模 式 (DSLMP ) 

为 了 生成 DSLMP 特征 , 将 每 个 LBP 编码 的 图 像 划分 为 非 
重 琶 补丁 ， 并 从 每 个 补丁 中 提取 直方 图 信息 U3。 每 张 图 像 中 的 
补丁 数 为 256， 每 个 补丁 的 大 小 为 16x16 。 所 有 这 三 个 特征 描 
述 符 如 表 1 所 示 。 

表 1 本 文 框架 中 使 


的 基于 补丁 的 特征 描述 符 的 总 结 


汉代 高 ， 等 : 


特征 类 型 LGP HGSFRM DSLMP 
补丁 尺寸 16*16 16*16 16*16 
补丁 镶 符 非 重 又 非 重 又 重生 
补丁 数 5120 5120 5120 
每 个 补丁 中 bins 数 32 32 59 
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其 中 ，y 表示 两 个 特征 向 量 之 间 的 卡 方 距离 ， /=n +m 表示 每 
个 分 类 中 样本 的 数量 。 类 内 距离 的 方差 计算 如 下 : 


c L-l 1 
VAR(p)= 2 > (GX, (Pp),Xii(p) -Dp) (9) 


i=] j=1 k=j+1 


类 间 平 均 距离 的 计算 如 下 : 


D,(p)= 所 多 pn AR CD) (10) 
c(c-1) g= 2 D 守 
ee 
VAR(P)=D, > PPG pp) -Dp UD) 
每 个 补丁 p 的 学 习 权 值 计算 为 
(D.(p)-D,(p)” 
W s 12 
(PD) = TAR (Cp) +VAR,CD) 0 
学 习 权 值 确定 了 用 于 识别 的 不 同 补丁 的 重要 性 。 接 着 ， 按 


照 权 值 降序 储存 补丁 ， 用 以 引导 每 个 特征 向 量 补丁 采样 过 程 。 

补丁 采样 : 创建 多 个 子 空间 (Kk) 用 以 生成 对 应 于 每 个 描述 
符 的 分 类 器 的 集成 。 基 于 加 权 补 丁 的 半 随 机 采样 构建 每 个 子 空 
间 。 半 随机 的 含义 是 选择 补丁 的 概率 与 其 权 值 相 关 。 对 于 创建 


第 kk,k={1,2,.…,k} 个 子 空间 ， 本 文 从 Y3 和 yy 采样 有 关 特 定 描 
述 符 的 个 补丁 ， 其 中 j={1,2,...c} 、j={D2,..,n} 且 


Q ={1,2,.…,P} ， 以 获得 ye R”™ 和 YeR”” 。 通 过 将 个 特 


J 


征 向 量 连 接 到 一 个 向 量 表示 中 , 获得 7 和 J4 ,其 中 站 = wxd， 


4 为 每 个 补丁 的 特征 维 数 ( 见 表 1)。 考 虑 到 补丁 可 以 被 全 面 的 利 
用 , 可 以 考虑 & 的 60% 选 自 补丁 的 前 半 ，@ 的 40% 选 自 补 丁 的 
剩余 一 半 。 玉 和 c 是 根据 经 验 拟定 的 ， 为 了 减少 计算 量 ， 后面 

章节 给 出 了 实验 后 的 建议 取 值 。 
子 空间 构造 1: 由 于 p 的 维度 通常 高 于 样本 的 数量 ， 所 以 
执行 特征 降 维 避免 小 样本 规模 问题 。 减 低 特 


以 减少 计算 时 间 并 i 
征 维 度 的 常用 方法 是 应 用 主 成 分 分 析 (Principal Component 
Analysis,PCA)。PCA 寻找 可 以 最 好 地 重建 初始 向 量 的 投影 空间 。 
为 了 找到 这 个 子 空间 ， 分 别 从 化 妆 之 前 和 化 妆 之 后 采样 的 特征 


1.4 半 随 机 子 空间 LDA (SRS-LDA) 
1.4.1 训练 阶段 

权 值 学 习 : 在 采样 补丁 之 前 ， 本 文 给 每 个 提取 的 补丁 分 配 
权 值 ， 接 着 ， 基 于 这 些 权 值 排序 这 些 补丁 。 基 于 费 舍 尔 的 分 离 
圣 则 计算 权 值 。 本 文 的 假设 为 ， 不 同 面部 区 域 通过 化 妆 可 能 


St 


向 量 中 计算 平均 向 量 j4 和 7 : 7 = nm 和 
“rm ys 。 整 个 协 方差 矩阵 的 计算 如 下 : 
1#- > bj " 
pr -7CY -7 (13) 


特征 向 量 W, 可 从 从 协 方差 矩阵 $ 中 计算 获得 : SW, = AW 。 
在 生成 W, 之 后 ， 可 将 化 妆 之 前 和 化 妆 之 后 样本 投影 到 新 的 子 


人 脸 识别 有 不 同 的 影响 ， 因 为 化 妆 信 息 是 不 均 布 的 。 对 于 每 个 
补丁 己 及 其 相关 的 特征 向 量 马 ;(P) ， 类 内 平均 距离 D(p) 为 


Dp)==) > ,(p) (8) 


7 
2 全， 2 ni(P),Y 


空间 中 ， 如 下 : 


yr =We(Y, —7") 
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yi = We (Yi —77) (14) 


ys 和 yh 分别 为 PCA 后 化 妆 之 前 和 化 妆 之 后 样本 的 投影 


特征 向 量 。 使 用 的 特征 向 量 数 为 min(N -c,M -ec) 。 
使 用 化 妆 之 前 和 化 妆 之 后 的 特征 向 量 来 计算 类 间 散 度 和 类 
内 散 度 矩 阵 。 这 确保 了 学 习 的 特征 表示 对 化 妆 变 化 不 太 敏 感 。 


当 为 特征 描述 符 构 造 第 大 个 子 空 间 时 , 使 / 


化 妆 之 


前 (y?,) 和 化 


妆 之 后 (y#) 投影 向 量 计算 第 ;个 主体 的 平均 类 向 量 。 


| 


(k) 一 1 
的 -人 (15) 
接着 ， 计 算 类 间 散 度 矩 阵 ， 如 下 : 

SK = E Na (Kk) 人 9 — (OMT 16 
0 177) —7") (10) 

其 中 :7 = 二 六 % 。 类 内 散 度 矩 降 的 计算 如 下 : 

SH = DD ,nny 
i=1 j=l (17) 


c Mm 


+> ny 7 ) 


i=l j=l 


LDA 的 目的 是 寻找 最 优 投影 wx ， 它 可 以 最 大 化 类 间 散 度 


和 矩阵 行列 式 和 类 内 散 度 和 矩阵 行列 式 的 比例 。 该 优化 问题 的 定义 
为 
TS 
oO =argma Ss (18) 


这 相当 于 解决 Sow 


= MoSwyww 的 广义 特征 值 问题 ， 民 


中 大 ={L2,., 玉 }。 对 于 每 个 子 空间 , 训练 阶段 的 输出 为 72 、714 


I 


ao 和 ww。 这 种 处 理 方式 的 目的 在 于 : (9) 在 权 值 学 习 过 程 中 一 


起 使 用 化 妆 之 前 和 化 妆 之 后 的 补丁 ; (b) 生 成 相应 的 子 空间 。 其 
中 ， 化 妆 之 前 和 化 妆 之 后 的 特征 向 量 用 于 学 习 LDA 的 类 内 和 
类 间 散 度 矩 阵 。 为 每 个 描述 符 重复 构造 的 这 些 子 空间 ， 也 称 为 
通用 子 空间 。 
1.4.2 测试 阶段 

在 测试 阶段 ， 将 隔离 测试 集中 主体 化 妆 之 后 的 图 像 当 作 探 
针 ， 同 时 将 其 与 当 作 图 库 图 像 的 化 妆 之 前 的 图 像 进行 比较 。 令 
YY; = 了 (1 ;) 表 示 从 1 ,中 提取 的 一 组 特征 向 量 , 7 ,为 来 自 测试 
样本 的 化 妆 之 前 的 图 像 或 化 妆 之 后 的 图 像 。 从 
{Y (Pp): Yj,(p)e YY ,,1<p<P} 中 选择 w 补丁 的 相同 集 并 将 其 


连接 为 一 个 特征 向 量 Y 或 Y*; 。 训 练 集中 和 测试 集中 补丁 的 


位 置 和 顺序 相同 。 
子 空间 投影 : 对 于 每 个 导出 的 子 空 


间 k={1,2,...,K}， 用 下 


冯 代 高 ， 等 ; 


ChinaXiv 


改进 随机 子 空间 | 集成 学 习 的 


人 捧 下 大 


式 获 得 化 妆 之 前 和 化 妆 之 后 测试 样本 的 表示 。 


ys =Wi We (x7,— A ) 
yj = We We (ij—1) 


其 中 : ys 或 y# 分 别 为 化 妆 之 前 和 化 妆 之 后 测试 样本 最 终 投 影 


的 特征 向 量 。 倘 若 化 妆 信 息 未 知 ， 则 可 采用 化 妆 检 测 方案 05 进 
行 区 分 。 总 平均 向 量 7 可 用 于 投影 ， 从 而 导致 匹配 精度 略微 减 
少 (<1% 识 别 率 )。 

SRC 和 CRC 分 类 : 如 前 所 述 ， 化 妆 之 前 的 样本 被 用 作 图 


库 ， 化 妆 之 后 的 样本 被 用 作 探 针 。 令 
OE ,RE RA) 


样本 的 图 库 特征 向 量 ， wc 为 图 库 中 主体 的 数量 ， 为 第 ;个 主 


体 的 样本 数 。 令 y4 表示 化 妆 之 后 的 探 针 样本 。 通过 用 探 针 样本 


蔡 换 图 库 计 算 距 离 分 数 ， 从 而 获得 化 妆 之 前 化 妆 之 后 样本 之 间 
的 相似 度 分 数 。 这 是 使 用 稀疏 和 协作 表示 09 原 则 进行 计算 的 。 
SRC 和 CRC 有 其 自身 的 优点 ， 并 能 在 分 类 中 提供 补充 信息 。 
因此 ， 本 文 为 每 个 子 空 间 开 发 了 两 个 分 类 器 ， 一 个 基于 SRC， 
另 一 个 基于 CRC， 综 合 应 用 它们 的 输出 作为 分 类 依据 。 


2 ”实验 仿真 与 分 析 


为 了 验证 基于 多 补丁 集成 学 习 的 人 脸 识 别 算法 对 化 妆 之 前 
和 化 妆 之 后 人 脸 样 本 识别 的 有 效 性 ， 采 用 YMU 数据 集中 的 相 
关 人 脸 数据 进行 了 如 下 实验 。 
2.1 化 妆 数 据 集 

使 用 YMU- 数 据 集 进 行 仿真 实验 。 为 了 减少 由 于 缩放 和 姿 


势 引起 的 变化 ， 基 于 眼 部 地 标 ， 使 用 仿 射 变换 几何 规范 化 人 脸 
图 像 。 将 所 有 规范 化 的 人 脸 图 像 裁剪 并 调整 至 维度 为 128x128 ， 
将 图 像 从 RGB 转换 为 灰 度 图 。 


图 3 调整 和 裁剪 之 后 样本 的 实例 


出 于 训练 人 脸 匹 配 程序 的 目的 ， 组 建 另 一 个 数据 集 。 该 训 
练 数据 集 由 来 自 FAM 数据 集 、 亚 洲 女性 化 妆 数 据 集 和 整个 
MIAA 数据 集 ! 的 女性 受 试 者 的 一 个 子 集 组 成 。 训 练 数据 集中 ， 
样本 的 总 数 为 796， 对 应 于 398 个 受 试 者 。 每 个 受 试 者 有 一 个 
化 妆 之 前 和 一 个 化 妆 之 后 的 样本 ,将 这 个 数据 集 称 为 “化 妆 训 练 
MTD) ”。 由 于 MTD 的 每 个 受 试 者 
部 对 称 性 来 生成 镜像 的 人 脸 样 


(Makeup Training Data, 
的 样本 数 有 限 ， 所 以 本 文 使 用 面 
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之 间 没 有 重复 。 在 实验 中 使 用 ] 了 


于 每 个 描述 符 


人 =0.15, 和 =0.Law 
向 量 的 维 


以 


为 45 ; 


参数 值 : 子 空间 数 及 ， 对 
对 于 HGSFRM 和 LGP ， 


=180; 对 于 LBP，w =80 。SRS-LDA 特征 


度数 为 256。 


2.2 YMU 数据 集 上 的 实验 


为 了 评估 本 文 提 出 人 脸 匹 配 程序 的 怕 


识别 实验 。 


FE 能 ， 进 行 下 列 三 类 的 


) 比 较 B 和 p(BvsB): 用 以 比较 的 这 两 张 均 为 化 妆 之 前 
的 样本 。 

b) 比 较 4 和 4(Avs 4): 用 以 比较 的 这 两 张 图 像 均 为 化 妆 
之 后 的 图 像 。 

oO) 比较 4 和 BB(AvsB): 用 以 比较 的 一 张 图 像 为 化 妆 之 后 
的 图 像 ， 而 另 一 种 图 像 为 化 妆 之 前 的 图 像 。 


在 YMU 数据 集中 考虑 的 匹配 场 
errorratesEER) 总 结 
为 商业 人 脸 识 别 软件 算法 05， 
先进 性 能 。 当 匹配 化 妆 之 后 和 化 妆 之 前 样 
都 有 明显 较 高 的 EER。 对 于 


景 的 等 
[图 4 所 示 。COTS-1、 


效 错误 率 (equal 
COTS-2 和 COTS-3 


它们 代表 着 人 脸 识别 任务 中 的 最 
本 时 ， 这 些 评估 算法 
匹配 场景 4 vs B ， 本 文 显著 地 将 


EER 从 接近 20% 减 少 到 了 6.36%， 获 得 了 最 低 的 等 效 错误 率 。 

25 
20 

可 

ww 5 

性 一 # 一 BvsB〈%) 

号 

捧 1o | 本 一 里 -AvsA (%) 

区 AvsB (%) 


COTS-1 


COTS-2 COTS-3 LGP 


本 文 


2.3 ”算法 融合 


提高 匹配 性 能 。 基 了 


元 配 程序 生成 


提高 了 人 脸 匹 配 的 1 


本 文 还 考虑 了 将 本 文 


接受 率 (genuine accept rate,GAR) 方 


图 4 不 同 算法 识别 错误 


F 最 小 -最 大 规则 和 


简单 上 


器 率 


提出 的 方法 与 COTS 融合 ， 以 进 一 
的 求 和 规则 规范 化 


的 个 体 匹 配 分 数 。 由 图 


上 会 已 
生 能 。 


很 明显 


分 别 为 13.04%、7. 


79% 和 9.33% 。 


， 本 文 提 


5 可 
面 ， 融 合 的 匹配 程序 显著 
出 的 方法 和 COTS 提 
供 了 互相 补充 的 信息 .COTS-1、.COTS-2 和 COTS-3 获得 的 EERs 
COTS-1、 


见 ， 就 EER 和 真 


COTS-2 和 COTS- 


3 在 误 识 率 〈fault acceptrate, FAR) 0.1% 处 获得 的 GARs (GAR: 


0.1% FAR) 分 别 为 49.36%、77.15% 和 58.97%。 本文 提 
得 的 EER 为 6.41%，GAR 为 69.89%。 
和 COTS-2 及 COTS-3 时 ， 本 文 获得 了 最 佳 


和 5.08% EER， 该 


试 结果 。 这 表明 ， 本 文 提 
必须 注意 的 是 ， 本 文 只 


a 


融合 本 文 提 


出 方法 获 
出 的 方法 
结果 : 84.11%GAR 


结果 优 于 COTS-2 和 COTS-3 的 单一 算法 测 


出 的 方法 可 以 有 效 改 进 COTS 算法 。 


关注 鲁 棒 的 特 和 


E 提 取 和 匹配 ， 这 与 端 对 


Chin TBXiy 会 作 期 刊 


有 竞争 力 。 


真实 接受 率 (%) 


录用 稿 汉代 高 ， 等 : 改进 随机 子 空间 i 集成 学 习 的 鲁 枯 人 脸 识 另 

本 。 通 过 这 种 方式 ， 有 助 于 构造 更 多 和 鲁 棒 的 子 空 间 。 应 该 注意 端 COTS 匹配 程序 正好 相反 ， 端 对 端 COTS 匹配 程序 具有 多 年 
的 是 ， 通 过 MTD 训练 并 不 会 造成 实验 结果 的 过 度 优 化 ， 这 是 研究 的 优势 ， 因 此 可 能 具有 先进 的 前 处 理 和 后 处 理 程序 。 尽 管 
因为 它 与 YMU 属于 2 个 不 同 的 数据 库 ， 在 训练 和 测试 受 试 者 如 此 ， 本 文 提 出 的 方法 仍 在 识别 率 及 融合 算法 改进 方面 非常 具 


一 @ 一 COTS-1 
COTS-2 

—@— COTS-3 

一 9 一 本 文 
本 文 +COTS-2 
本 文 +COTS-3 


图 5YMU 数据 集 上 单 


107 10 10° 10 10? 
误 识 率 (%) 


和 法 和 融合 算法 在 


不 同 误 识 率 下 的 真实 接受 率 曲线 


相 比 于 


AvsB 上 的 随机 采样 ，1 
样 方案 将 GAR 大 约 提 高 了 4%。 


权 值 学 习 产 生 的 半 随机 采 
由 于 半 随 机 采样 方案 的 使 用 ， 


该 方法 


的 稳定 性 是 不 确定 的 。 为 了 证 实 SRS-LDA 的 稳定 性 ， 
本 文 重复 实验 3.1 并 报告 EER 和 GAR 的 分 布 。 如 图 6 所 示 ， 
在 0.1% 的 FAR 处 ， 
化 范围 为 69.18% 到 70.6% 。 
没有 造成 集成 算法 的 不 稳定 。 


EER 值 范围 为 6.13% 到 6.69%，GAR 的 变 
该 实验 结果 表明 ， 采 用 半 随 机 方案 


等 效 错误 
(a) EER 


图 6 YMU 数据 集 上 SRS-LDA 方法 的 稳定 性 的 示例 :6.41 圭 
(EER),69.89 + 


吴 率 (%) 


真实 接受 率 (%) 
(b) GAR 


0.71(FAR = 0.1% 处 的 GAR) 


2.4 描述 符 个 体 分 析 


在 多 补 ] 


(LGP、HGSFRM 和 DSLMP )。 


集成 学 习 算 法 中 使 


不 同 。 如 果 只 使 用 


了 三 种 类 型 的 特征 描述 
但 是 ， 个 体 特征 描述 符 的 性 能 


基于 描述 符 的 方法 ， 则 4 vs B 的 匹配 性 能 非 


常 低 。 如 图 7 所 示 ,LGP、HGSFRM 和 DSLMP 获得 的 EER 分 


别 为 20.79%、 


20.54% 和 19.93%。 


的 使 / 
匹配 


j 进 
性 和 


此 证 实 了 在 本 文 提 


这 表明 ， 整 体 学 习 方 案 框 架 


步 提高 了 算法 性 能 ,在 采用 了 SRS-LDA 方 法 之 后 ， 
gE 显 著 增 加 。 在 大 量 识别 实验 后 之 后 的 辩 


识 数 据 中 可 以 


看 出 ，LGP、HGSFRM 和 DSLMP 的 融合 得 到 了 最 佳 结果 ， 由 
出 框架 中 使 用 这 些 特征 的 合理 性 。HGSFRM 
述 符 之 间 的 最 佳 整体 性 能 。 


获得 了 个 体 特征 
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一 一 GAR(%) 
一 本- EER(%) 


汉代 高 ， 


选 提 
MIW 数据 集 添 加 112 张 人 脸 图 像 添加 到 了 图 库 ， 从 而 总 共有 


104 


以 及 112 张 MIW 图 像 )。 人 脸 
从 实际 实验 数据 中 可 以 看 出 ， 


竺 


ChinaXiy 合 作 期 刊 ， 


et 集成 学 习 的 鲁 棒 人 脸 识 


E 子 集 为 10000 的 照片 图 像 (10K: 4574 女性 +5426 男性 )。 从 


14 张 图 像 (302 张 化 妆 之 前 的 YMU 图 像 、10K FRGC 图 像 
匹配 精度 数据 如 图 9 所 示 的 曲线 。 
在 使 用 前 述 完 全 相同 算法 的 


区 


前 提 


HGSFRM 


DSLMP 


SRS-LDA+LGP SRS-LDA+HGSFRM SRS-LDA + DSLMP 


图 7 


2.5 子 空 间 数 


间 


数 (KK) 


采 


不 同 描述 


在 SRS-LDA 中 需要 考虑 的 一 


精 


度 。 如 图 


[ey 


符 的 GAR 与 EER 测试 数据 


个 重要 的 参数 是 使 用 的 子 空 
。 出 于 此 目的 ， 本 文 构造 了 另 一 个 实验 来 分 析 本 文 提 
出 方法 的 收敛 性 。 本 文 逐 渐 增 加 子 空 
8 所 示 ， 本 文 提 


间 数 并 计算 相应 的 Rank-1 
出 方法 的 性 能 起 先 随 着 子 空间 数 的 


增加 而 增加 ， 然 后 稳定 。HGSFRM 在 60 次 迭代 中 到 达 顶 峰 ， 
而 DSLMP 和 LGP 分 别 在 50 和 80 次 迭代 之 后 到 达 顶 峰 。 


在 本 文 实验 中 ,将 子 空间 数 设 置 为 95。 实 验 表 明 在 这 个 子 
空间 数 下 的 算法 性 能 稳定 。 
L @ io 
ed 
00 到 一 
子 空间 数 
图 8 对 于 不 同 特 征 描述 符 (YMU 数据 集 )， 
子 空间 数 对 SRS-LDA 算法 的 影响 
2.6 计算 复杂 性 
于 训练 阶段 是 离线 执行 的 ， 在 实时 操作 期 间 只 有 测试 样 
本 的 特征 提取 和 分 类 会 影响 计算 时 间 。 特 征 提 取 过 程 为 简单 的 
线性 操作 且 其 资源 占用 有 限 ，DSLMP 和 CRC 即 采用 纯 随 机 采 


并 


集成 学 习 算 5 


上 二 


生成 的 随机 子 空 | 


样 方式 ， 各 方法 计算 耗 时 如 表 2 
时 间 比 其 他 方法 均 要 低 ， 这 是 因为 提出 


所 示 ， 


司 彼此 独立 ， 但 是 


表 2 本 文 


提出 算法 的 计算 时 间 ( 使 


可 见 SRS-LDA 的 计算 
的 SRS-LDA 方法 虽然 


是 它们 可 以 被 


行 处 理 ,在 计算 上 可 以 有 效 地 满足 实际 人 脸 识别 系统 的 要 求 。 
Matlab R2016 在 处 理 器 为 17- 


2800CPU,RAM 为 3.40 GHz 和 16GB 的 64 位 操作 系统 上 进行 实验 ) 


算法 LGP 


HGSFRM 


DSLMP 


CRC 


SRS-LDA 


时 间 (s) 4.18 


2.14 


3.82 1.34 


0.62 


2.7 大 规模 识别 实验 


J 


T 


为 了 证 


区 


明 实 际 人 脸 检 索 实验 利用 来 
像 的 子 集 增加 化 妆 之 前 的 样本 。 在 这 个 实验 中 ， 将 来 


数据 集 的 化 妆 之 后 的 相 


本 ) 


作 探 针 。 从 FRGC 数据 外 


自 FRGC 及 MIW 数 ] 
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下 ， 


大 规模 样本 辨识 精度 只 有 轻微 下 降 。 这 意味 着 ， 本 文 提出 


的 方法 可 应 
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该 方法 基于 
空间 。 随 后 利用 Fisher 的 分 离 准则 在 生成 子 空 
采样 过 程 。 
进行 分 类 。 最 终 输 出 为 来 自 
集 及 更 大 规模 数据 集 上 的 实验 结果 表明 了 本 文 提 出 方法 的 


性 。 
度 。 


到 一 个 大 的 数据 集 。 
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图 9 不 同 规 模 数据 样本 下 的 识别 精度 


YMU +FRGC YMU + FRGC+MIW 
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结束 语 


本 文 为 匹配 化 妆 之 后 图 像 和 化 妆 之 前 
补丁 集成 的 学 习 ， 为 三 个 不 


图 像 提 出 了 一 种 方法 。 
描述 符 生 成 了 多 个 子 
间 之 前 引导 补 ] 
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在 生成 的 


随机 子 空间 中 ， 同 时 使 用 SRC 和 CRC 
个 体 描述 符 的 匹配 分 数 。 YMU 数据 
有 效 
匹配 精 


由 


本 文 提出 的 方法 可 与 COTS 算法 融合 ， 进 一 步 提高 
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